iT邦幫忙

2024 iThome 鐵人賽

DAY 28
0
Python

自主學習Python網路爬蟲-PTT爬蟲、Hahow爬蟲、Yahoo電影爬蟲實作系列 第 28

Day28 藉由影片學習Python網路爬蟲-PTT爬蟲、Hahow爬蟲、Yahoo電影爬蟲實作

  • 分享至 

  • xImage
  •  

今天要分享的是PTT Beauty版爬蟲-用Cookie偽裝使用者並下載圖片
首先查詢"PTT 表特版 Sana"(私心喜歡><!!),點擊連結時會先跳出是否滿18歲的視窗,點擊進入網頁後即可看到照片,之後如果再次重新點擊連結時會發現已無是否滿18歲的阻擋視窗,因為已被紀錄在瀏覽器的Cookie中,如把紀錄刪除則會重新跳出阻擋視窗。
https://ithelp.ithome.com.tw/upload/images/20241016/20167787OVXiMEaCjL.jpg
https://ithelp.ithome.com.tw/upload/images/20241016/20167787fs5VU1VvwS.jpg
#找網站的標題,程式碼與執行結果如下
https://ithelp.ithome.com.tw/upload/images/20241016/20167787K2KUa0JgM2.png
接下來是下載圖片的部分,分為三個步驟:
1.建立圖片資料夾
2.找到網頁中的所有圖片
3.如果是圖片的話下載
所有的程式碼如下:
https://ithelp.ithome.com.tw/upload/images/20241016/20167787bkYSDziCEy.png
https://ithelp.ithome.com.tw/upload/images/20241016/201677873oYWcZSoR5.png
執行結果如下(在pythonCrawler中會新增所有出現在此網頁的照片):
https://ithelp.ithome.com.tw/upload/images/20241016/20167787MiHQzz4Bih.jpg
https://ithelp.ithome.com.tw/upload/images/20241016/20167787b4mAShwcgs.png


以上是我今天的分享,謝謝大家!
參考網址:https://www.youtube.com/watch?v=1PHp1prsxIM&list=LL&index=5


上一篇
Day27 藉由影片學習Python網路爬蟲-PTT爬蟲、Hahow爬蟲、Yahoo電影爬蟲實作
下一篇
Day29 藉由影片學習Python網路爬蟲-PTT爬蟲、Hahow爬蟲、Yahoo電影爬蟲實作
系列文
自主學習Python網路爬蟲-PTT爬蟲、Hahow爬蟲、Yahoo電影爬蟲實作30
圖片
  直播研討會
圖片
{{ item.channelVendor }} {{ item.webinarstarted }} |
{{ formatDate(item.duration) }}
直播中

尚未有邦友留言

立即登入留言